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摘要 : 天 文 数 据 处 理 是 天 文 研究 的 一 个 重要 环节 。 随 着 新 一 代 望 远 镜 功能 与 观测 能 力 的 
快速 发 展 ， 在 观测 地 点 构建 高 性 能 实时 计算 平台 ， 快 速 完 成 数据 的 分 析 与 处 理 是 一 种 趋势 
针对 明 安 图 射电 频谱 日 像 仪 和 明 安 图 观测 站 实时 数据 处 理 系 统 的 建设 要 求 ， 系 统 研究 了 基于 
OpenStack 的 本 地 云 实现 方法 与 系统 自动 管理 模式 ,提出 了 动态 进行 计算 节点 启 停 的 方法 ， 
并 进行 了 实际 测试 。 实 验 表 明 ， 该 模式 完全 可 以 满足 天 文 数据 处 理 的 需求 ， 并 且 比 传统 的 静 
态 分 配 计算 资源 的 数据 处 理 方法 更 高 效 ， 可 以 有 效 地 节省 能 源 开销 ， 降 低 观测 成 本 ， 对 未 来 
天 文 台 站 高 性 能 计算 平台 的 建设 有 一 定 的 参考 价值 。 
关键 词 : 天 文 数 据 处 理 ; OpenStack; 自动 管理 
中 图 分 类 号 : TP272 文献 标识 码 : A 文章 编号 : 1672-7673(2017)02-0243-08 


近年 来 ， 随 着 天 文 数据 的 迅速 膨胀 ， 传 统 的 计算 方式 已 经 不 能 满足 处 理 需求 ， 而 分 布 式 计算 、 虚 
拟 化 技术 以 低 成 本 、 高 效率 等 优点 成 为 天 文 数据 处 理 领 域 的 一 个 研究 热点 。 在 天 文 观测 与 后 续 资 料 处 
理 过 程 中 ,需要 对 大 量 的 观测 数据 进行 实时 人 处理， 这 对 底层 的 计算 资源 有 非常 高 的 要 求 ， 能 否 提供 稳 
定 高 效 的 基础 设施 支持 直接 影响 数据 处 理 的 效率 '"] 。 

明 安 图 射电 频谱 日 像 仪 (Mingantu Ultrawide SpEctral Radioheliograph , MUSER ) 位 于 内 蒙古 锡 林 格 勒 
盟 正 镶 白 旗 ， 是 我 国 新 一 代 太阳 射电 综合 孔径 望远镜 。 为 确保 实时 观测 ， 在 明 安 图 观测 站 部 署 了 一 套 
高 性 能 计算 平台 ， 但 随 之 出 现 的 问题 是 现场 的 观测 助手 与 驻 站 科学 家 不 一 定 熟悉 计算 机 系统 的 维护 ， 出 
现 操 作 系 统 与 软件 故障 时 无 法 快速 恢复 等 问题 。 此 外 ， 所 有 的 计算 节点 随时 开机 ， 常 年 电费 等 是 一 笔 
不 菲 的 开销 。 事 实 上 ， 在 没有 太 多 计算 需求 的 时 候 ， 部 分 计算 机 节点 完全 可 以 脱 机 进入 低能 耗 状态 。 

将 云 计算 引入 天 文 数 据 处 理 领 域 ， 可 以 简化 整体 系统 的 管理 要 求 ， 并 提高 系统 的 可 维护 性 ， 但 静 
态 的 虚拟 机 分 配 模式 往往 造成 计算 资源 利用 率 低 或 者 资源 浪费 的 问题 ， 而 人 工 干预 的 分 配 模式 又 增加 
系统 的 成 本 ” 。 本 文 针 对 传统 天 文 数据 处 理 模式 中 存在 的 计算 资源 不 足 、 资 源 浪 费 及 利用 率 低 等 问 
题 ， 提 出 一 种 基于 OpenStack 的 自动 管理 模式 。 该 模式 采用 虚拟 化 管理 软件 OpenStack 作为 基础 平台 ， 
为 天 文 数据 处 理 提供 虚拟 计算 资源 并 进行 动态 管理 ， 可 根据 系统 当前 的 计算 量 决定 增加 或 者 减少 计算 
资源 ， 将 承担 较 少 计算 量 的 计算 节点 关闭 ， 以 提高 计算 资源 的 利用 率 并 降低 物理 机 开销 ， 改 进 传统 天 
文 数据 处 理 过 程 中 存在 的 问题 。 


1 OpenStack 云 平 台 介 绍 


OpenStack 是 一 款 由 美国 国家 航空 和 宇航 局 和 云 计算 提供 商 (Rackspace) 共 同 合 作 开发 的 开源 云 平 
台 管 理 软件 。 从 2010 年 第 1 版 诞生 至 今 ，OpenStack 经 历 了 13 个 版 本 的 演变 ， 期 间 有 成 千 上 万 的 社 
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区 与 公司 参与 了 版 本 的 升级 与 改进 。 如 今 ，OpenStack 已 经 足以 向 各 领域 提供 一 套 完整 的 基础 设施 服 
务 (Jaas) 、 平 台 服 务 (PaaS) 、 软 件 服务 (SaaS) 解 决 方案 ， 改 善 并 解决 行业 中 存在 的 问题 9。 

OpenStack 的 3 大 核心 组 件 为 Nova、Glance 、Swift。Nova 负责 虚拟 机 管理 ， 包 括 虚 拟 机 的 创建 、 
迁移 、 删 除 等 工作 。Nova 自身 又 包含 许多 子 服务 ， 如 Nova-API 提供 服务 接口 并 接收 用 户 请 求 ; Nova- 
Scheduler 负责 虚拟 机 调度 工作 ， 它 可 以 决定 在 哪 台 物理 节点 上 创建 虚拟 机 ;， Nova-Compute 负责 虚拟 
机 创建 工作 !5 。 镜 像 管 理 组件 Glance 负责 镜像 的 上 传 、 更 新 、 删 除 等 工作 ， 它 可 以 决定 OpenStack 使 
用 的 后 端 镜像 存储 设备 ， 如 使 用 Swift 存储 或 者 使 用 本 地 文件 系统 存储 。Swift 组 件 提供 对 象 存储 服 
务 ， 用 户 可 以 在 Swift 中 创建 自己 的 容器 ， 存 储 各 种 类 型 的 文件 ， 如 文本 、 视 频 、 音 频 等 。Swit 提供 
的 对 象 存储 服务 具有 强大 的 扩展 性 、 元 余 和 持久 性 ， 并 且 通 过 保存 多 个 副本 的 方式 为 用 户 提供 极 高 的 
安全 性 '7 。 除 了 这 3 个 核心 组 件 外 ， OpenStack 还 包括 Keystone 、Quantum、Cinder 、Horizon 等 组 件 ， 
分 别提 供认 证 服务 、 虚 拟 网 络 服务 、 虚 拟 卷 服务 、 界 面 服务 。 各 组 件 关系 如 图 1。 
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图 1 OpenStack 组 件 图 31 
Fig. 1 The component diagram of OpenStack!*! 


OpenStack 的 所 有 组 件 既 可 以 结合 使 用 ， 提 供 完 整 的 云 服 务 ， 也 可 以 将 每 个 组 件 单独 安装 ， 提 供 
独立 的 子 服 务 。 通 过 OpenStack 的 架构 ， 可 以 看 出 其 功能 丰富 ， 有 展 好 的 扩展 性 ， 并 且 可 以 根据 需求 
做 大 量 的 二 次 开发 ， 完 全 符合 大 规模 天 文 数 据 处 理 的 需求 。 


2 OpenStack 云 平台 部 署 


明 安 图 射电 频谱 日 像 仪 有 8 台 服 务 器 ， 本 文采 用 1 个 控制 节点 和 w 个 计算 节点 的 部 署 方案 ， 即 1 
台 服 务 咒 做 控制 节点 ， 剩 下 的 都 是 计算 节点 。 控 制 节点 负责 全 局 管理 ， 提 供 身 份 认证 服务 、 镜 像 代 理 
服务 、 虚 拟 网 络 服务 、 客 户 端 网 络 服务 以 及 数据 库 服务 ， 数 据 的 存储 使 用 MySQL 数据 库 。 对 于 Swift 和 
Nova 来 说 ， 控 制 节点 只 是 提供 代理 服务 ， 真 正 实 现 对 象 存储 和 虚拟 机 创建 工作 的 是 计算 节点 。 部 署 时 ， 
所 有 节点 安装 Ubuntul14. 04 Server 版 操作 系统 和 G 版 OpenStack 。 控 制 节 点 上 部 署 Keystone 服务 、Glance 
服务 Swift-Proxy 服务 Quantum-Server 服务 Horizon 服务 和 除 Nova-Compute 外 的 所 有 Nova 服务 ， 所 
有 计算 节点 部 署 Nova-Compute 服务 Quantum-agent 服务 、Swift-Storage 服务 。 节 点 部 署 如 图 2, 
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图 2 节点 部 署 图 
Fig.2 The deployment diagram of nodes 


控制 节点 和 计算 节点 分 别 配 有 两 块 网 卡 ， 网 卡 1 负责 节点 间 通 信 并 提供 外 网 ， 网 卡 2 被 OpenStack 
的 Quantum 服务 占用 ， 提 供 虚 拟 网 络 服务 。 本 文采 用 Open VSwitch 为 虚拟 机 划分 Vlan。 为 了 便于 管 
理 ， 将 所 有 虚拟 机 先 加 到 一 个 内 部 局 域 网 中 ， 确 保 各 个 虚拟 机 之 间 可 以 通信 ， 再 将 内 部 局 域 网 通过 路 
由 器 连接 到 外 网 ， 证 每 台 虚 拟 机 可 以 访问 外 网 资源 。 这 里 的 外 网 指 用 Quantum 建立 的 和 网 卡 1 的 IP 
同属 一 个 网 段 的 网 络 。 同 时 ， 负 责 不 同 功能 模块 的 虚拟 机 集群 可 通过 划分 子 网 进行 网 络 隔离 。 网 络 拓 
扑 图 如 图 3。 为 了 方便 从 外 网 直接 访问 OpenStack 中 的 虚拟 机 ， 为 每 台 虚 拟 机 提供 了 一 个 浮动 PP， 这 
个 浮动 IP 和 网 卡 1 属 同一 个 网 段 。 

客户 端 界面 由 控制 节点 的 Horizon 服务 提供 ， 用 户 可 以 直接 在 浏览 器 中 输入 控制 节点 外 网 IP 进行 
访问 。 本 文 的 部 署 方案 有 很 高 的 扩展 性 ， 即 计算 节点 的 添加 非常 方便 ， 只 需 在 新 加 节点 上 部 署 Nova- 
Compute 服务 Quantum-agent 服务 Swift-Storage 服务 即 可 。 


3 自动 管理 模式 


3.1 设计 原理 

为 实现 计算 资源 的 自动 管理 ， 监 控 集 群 中 每 台 虚 拟 机 的 中 央 处 理 器 使 用 率 、 内 存 使 用 率 和 网 卡 流 
量 ， 当 一 台 虚 拟 机 在 一 段 时 间 内 各 项 监控 值 都 低 于 设 定 阔 值 时 ， 说 明 这 人 台 虚 拟 机 承担 的 计算 量 较 少 ， 
则 关闭 此 虚拟 机 ， 减 少 系 统 开销 ; 当 整 个 集群 中 的 虚拟 机 在 一 段 时 间 内 各 项 监控 值 升 高 并 超过 设 定 阔 
值 时 ， 说 明 此 时 的 计算 量 较 大 ， 则 开启 一 台 虚 拟 机 平衡 负载 。 同 时 ， 当 某 台 虚拟 机 的 负载 过 高 时 ， 应 
及 时 为 其 分 配 更 多 资源 ， 以 适应 计算 的 需求 。 
3.2 模式 设计 

为 实现 计算 资源 的 自动 管理 模式 ， 关 键 需要 解决 两 个 问题 : 一 是 如 何 获取 各 计算 节点 的 资源 开销 
情况 ; 二 是 如 何 对 计算 机 节点 进行 启 停 操 作 。 
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内 部 网 络 


图 3 虚拟 网 络 拓 扑 图 
Fig.3 Virtual network topology 


研究 中 系统 地 分 析 了 OpenStack 的 源 代码 。 事 实 上 ，OpenStack 的 客户 端 代码 提供 了 一 些 可 调用 
的 应 用 程序 编程 接口 ， 但 是 功能 相对 分 散 ， 而 且 有 些 方法 所 需 的 参数 过 多 旦 格式 见长 ， 不 便 使 用 。 
此 需要 重新 封装 一 些 方法 ,形成 一 套 便于 实现 自动 管理 模式 的 应 用 程序 编程 接口 。 重 新 封装 的 应 用 程 
序 编程 接口 有 用 户 管理 、 镜 像 管 理 、 虚 拟 网 络 管理 和 虚拟 机 管理 相关 的 接口 。 其 中 几 个 重要 的 方法 说 
明 如 下 : 

create_user 方法 ， 负 责 在 OpenStack 中 创建 用 户 ， 需 要 提供 的 参数 有 Tenant 名 、 用 户 名 、 用 户 密 
码 。 其 中 Tenant 代表 租户 ， 即 OpenStack 中 的 一 个 项 目 ， 一 个 租户 下 可 包含 许多 用 户 。 此 方法 首先 检 
查 租户 是 否 存在 ， 若 不 存在 则 首先 创建 租户 ， 若 存在 则 在 此 租户 下 新 建 用 户 ， 同 时 检查 用 户 的 唯一 性 
并 为 用 户 添 加 相关 权限 。 

create_img 方法 ， 在 指定 用 户 下 创建 一 个 镜像 ， 需 要 提供 的 参数 有 用 户 名 、 用 户 密码 、 镜 像 名 、 
镜像 格式 和 镜像 的 位 置 。 镜 像 的 位 置 可 以 是 本 地 路 径 或 者 是 一 个 网 络 资源 的 链接 。 

create_net 方法 ， 在 指定 用 户 下 创建 一 个 网 络 ， 需 要 的 参数 有 用 户 名 、 用 户 密 码 、 网 络 名 、 
子 网 名 、 网 络 地 址 、 网 关 、 域 名 系统 、 网 络 地 址 池 和 是 否 文 持 动 态 主机 配置 协议 (Dynamic Host 
Configuration Protocol，DHCP ) 。 

create_vm 方法 ， 在 指定 用 户 下 创建 一 个 虚拟 机 ， 需 要 的 参数 有 用 户 名 、 用 户 密码 、 虚 拟 机 名 、 
中 央 处 理 器 个 数 、 内 存 大 小 和 镜像 名 。 通 过 可 选 参数 可 以 指定 虚拟 机 使 用 的 网 络 和 卫 。 

这 些 方法 在 创建 资源 前 都 会 检查 用 户 的 合法 性 和 所 要 创建 资源 的 唯一 性 。 在 部 署 云 环境 时 ， 镜 像 
的 制作 是 关键 ， 将 操作 系统 、 生 产 环境 打包 制作 成 一 个 镜像 ， 就 可 以 通过 这 些 应 用 程序 编程 接口 快速 
地 自动 部 署 一 个 天 文 数据 处 理 的 云 环 境 。 当 生产 环境 发 生变 化 时 ， 可 通过 快照 功能 将 环境 保存 ， 再 利 
用 快照 创建 新 的 虚拟 机 '” 。 

监控 集群 中 虚拟 机 的 方法 有 很 多 ， 采 用 OpenStack 底层 工具 Libvirt。Libvirt 是 Linux 系统 的 一 套 C 
语言 编写 的 函数 库 ， 支 持 多 种 虚拟 化 技术 的 管理 ， 如 KVM, Xen, QEMU 等 。Libvirt 命令 不 会 直 
接 提供 虚拟 机 的 中 央 处 理 器 的 使 用 率 、 内 存 使 用 率 及 网 卡 流量 ， 但 可 以 根据 命令 提供 的 信息 计算 虚拟 
机 一 段 时 间 内 各 项 资源 的 使 用 率 。 主 要 用 到 的 命令 有 virsh vepuinfo, 、virsh dommemstat 和 virsh dumpxml, 
这 些 命令 分 别 可 以 返回 虚拟 机 的 中 央 处 理 器 信息 、 内 存 信息 和 启动 参数 。 计 算 虚 拟 机 中 央 处 理 器 使 用 
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率 时 ， 每 隔 一 段 时 间 对 Libvirt 的 virsh vepuinfo 命令 返回 的 中 央 处 理 器 时 间 参 数 做 一 次 提取 ， 并 记录 
间隔 时 间 ， 最 后 用 两 个 时 间 点 上 的 中 央 处 理 器 时 间 差 除 以 间隔 时 长 得 出 一 段 时 间 内 的 中 央 处 理 器 使 用 
率 。 对 于 虚拟 机 的 内 存 使 用 率 ， 通 过 计算 一 段 时 间 内 的 平均 使 用 率 获 得 。 首 先 将 时 间 段 做 N 等 分 ，N 
的 取 值 根据 时 间 段 的 大 小 而 定 ， 利 用 Libvirt 的 virsh dommemstat 命令 ， 在 此 时 间 段 内 对 该 命令 返回 的 
瞬时 内 存 使 用 量 到 做 w 次 提取 ， 再 用 这 一 时 刻 的 瞬时 内 存 使 用 量 mm 与 虚拟 机 的 总 内 存 M 做 比 算出 此 
时 的 瞬时 内 存 使 用 率 ， pea Geran ar A 计算 虚拟 机 网 卡 流量 时 ， 利 
用 Libvirt 的 virsh dumpxml 命令 ， 此 命令 提供 虚拟 机 的 启动 信息 ， 从 中 提取 虚拟 机 使 用 的 网 络 设备 名 
称 ， 再 用 Linux 的 ifconfig 命 in? e 流量 报告 ， 同样 根据 一 段 时 间 间隔 计算 虚拟 机 某 时 段 内 
上 传 和 下 载 的 流量 。 


m. 


1 N 
Use Sy ey 100 (1) 
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为 实现 自动 管理 模式 ， 将 资源 监控 部 分 封装 成 一 个 后 台 服 务 ， 运 行 在 每 个 计算 节点 上 ， 服 务 每 隔 
一 段 时 间 获 取 一 次 监控 值 ， 将 数据 发 送 给 控制 节点 。 当 控制 节点 收 到 数据 后 ， 将 每 项 数据 与 设 定 的 安 
全 范围 进行 比较 ， 若 发 现 虚拟 机 的 平均 负载 高 出 安全 范围 的 上 限时 ， 则 使 用 create_vm 方法 开启 一 台 
= ee 均衡 负载 ， 若 发 现 某 一 台 虚拟 机 的 负载 低 于 安全 范围 的 下 限 
> ， 则 使 用 delete_vm 方法 将 其 关闭 并 从 计算 集群 中 删除 。 整 个 处 理 流 程 如 图 4。 


监控 虚拟 机 


达到 间隔 时 间 产生 监控 数 和 


控制 节点 收 到 


向 控制 节点 发 送 
监控 数据 


N 关闭 低 于 范围 
的 虚拟 机 


开启 一 台新 的 
虚拟 机 


图 4 系统 流程 图 
Fig.4 System flowchart 


4 实验 与 结论 分 析 


为 了 验证 整体 系统 的 可 用 性 ， 使 用 两 台 刀 片 服务 器 部 署 OpenStack ， 其 中 一 台 作 控制 节点 ， 男 一 
台 作 计算 节点 。 使 用 封装 好 的 应 用 程序 编程 接口 在 OpenStack 中 自动 部 署 一 个 用 于 处 理 天 文 观测 数据 
的 Mesos 集群 ， 其 中 包括 租户 、 用 户 的 创建 、 镜 像 的 上 传 、 网 络 的 创建 和 虚拟 机 的 创建 。 创 建 网 络 时 
需要 创建 一 个 内 部 网 络 和 一 个 外 部 网 络 ， 所 有 虚拟 机 连接 到 内 部 网 络 ， 便 于 管理 且 保 证 虚拟 机 间 的 通 
信 ; 外 部 网 络 除了 提供 访问 外 部 网 络 资源 的 功能 外 ， 还 可 以 为 虚拟 机 分 配 浮动 耻 ， 以 便 从 外 部 直接 
访问 虚拟 机 ， 内 网 和 外 网 之 间 使 用 一 个 路 由 器 连接 。 系 统 初 始 时 有 4 台 虚 拟 机 ， 每 台 虚 拟 机 配 有 1 个 
虚拟 中 央 处 理 器 和 4 G 内 存 ， 内 网 IP 的 范围 为 192. 168. 100.2-6， 浮 动 IP 的 范围 为 172. 31. 254. 81- 
84。 实 验 环境 见 表 1。 
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表 1 实验 环境 


Table 1 Experiment environment 
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主机 名 VCPU RAM/GB 内 网 IP 外 网 IP 
Mesos-master 1 4 192. 168. 100. 2 172. 31. 254. 81 
Mesos-slavel 1 4 192. 168. 100. 4 172. 31. 254. 82 
Mesos-slave2 1 4 192. 168. 100. 5 172. 31. 254. 83 
Mesos-slave3 1 4 192. 168. 100. 6 172. 31. 254. 84 


根据 实际 计算 任务 为 系统 设 定 的 安全 范围 是 (转换 为 小 数 后 ) : 中 央 处 理 器 使 用 率 0.4~0.8; 内 
存 使 用 率 0.4~0. 8; 网 卡 流量 0.4~1( GB)。 在 计算 节点 上 开启 监控 服务 ， 监 控 Mesos 集群 ， 监 控 服 
务 每 1 小 时 向 控 制 节点 发 送 一 次 监控 数据 ， 控 制 节点 在 收 到 数据 后 与 安全 范围 进行 比较 ,决定 开启 或 
关闭 虚拟 机 。 

实验 开始 时 ， 先 给 Mesos 集群 分 配 少量 计算 任务 ， 经 过 一 段 时 间 发 现 ，slave3 和 slave2 处 于 关闭 
RAS, WES; 之 后 逐渐 给 Mesos 集群 增加 计算 任务 ， 同 样 ， 经 过 一 段 时 间 发 现 ，slave2 和 slave3 Hi 
新 开启 ， 并 且 又 有 一 台新 的 虚拟 机 slaved 加 入 计算 集群 ， 如 图 6。 实验 中 使 用 的 刀片 服务 器 带 有 电压 
传感器 ， 通 过 查看 某 时 刻 的 电压 值 即 可 算出 此 时 的 瞬时 功率 ， 由 此 得 到 两 个 时 段 的 功 耗 情况 如 图 7。 


L Instance Name IP Address Size Keypair Status Task Power State 


= 192.168.100.6 


LJ  Mesos-slave3 172 31254 84 flavor-mesos | 4GB RAM |1VCPU | 10GB Disk - 


Shutoff Shutdown 


O | Mesos-slave2 人 


本 172.31.254.83 Shutoff 


Shutdown 


flavor-mesos | 4GB RAM|1VCPU|10GB Disk - 


一 192.168.100.4 


LJ | Mesos-slave1 172 31254 82 flavor-mesos | 4GB RAM|1VCPU|10GB Disk - Active None Running 
O  Mesos-master aie flavor-mesos | 4GB RAM | 1VCPU | 10GB Disk - Active None Running 
AS 关闭 计算 资源 
Fig.5 Close the computing resources 
C Instance Name IP Address Size Keypair Status Task Power State 
Mesos-slave4 eppoi flavor-mesos | 4GB RAM | 1 VCPU | 10GB Disk Running 
[]  Mesos-slave3 enpa flavor-mesos | 4GB RAM | 1 VCPU | 10GB Disk - Active None Running 
O Mesos-slave2 seapea flavor-mesos | 4GB RAM | 1 VCPU | 10GB Disk. - Active None Running 
口 Mesos-slave1 saree flavor-mesos | 4GB RAM | 1 VCPU | 10GB Disk - Active None Running 
[DD  Mesos-master WD flavor-mesos | 4GB RAM | 1VCPU | 10GB Disk - Active None Running 


— 172.31.254.81 


图 6 添加 计算 资源 
Fig.6 Add the computing resources 
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实验 表明 ， 本 文 提出 的 自动 管理 模式 在 计算 
集群 承担 任务 较 多 的 时 候 自 动 增加 虚拟 机 ， 均 衡 
负载 ; 在 计算 任务 较 少 的 时 候 关 闭 一 些 空闲 的 虚 
拟 机 ， 有 效 提 高 了 计算 资源 的 利用 率 ， 也 为 系 
统 减少 了 不 必要 的 开销 。 从 两 种 情况 的 功 耗 情况 
来 看 ， 运 行 一 小 时 后 ， 开 启 2 台 虚 拟 机 时 功 耗 在 
2 400~2 500 W 之 间 ， 耗 电 约 为 2.4”， 而 开启 5 
台 虚 拟 机 时 功 耗 在 2700~2 800 W 之 间 ， 耗 电 约 


为 2.7 。 两 种 情况 每 小 时 耗 电 相差 约 0.3”， 由 i 20 1 40 50 60 
此 可 见 ， 在 计算 任务 较 少 时 关闭 一 些 虚拟 机 可 以 a PEN 

有 效 地 减少 耗 电 ， 降 低 系统 成 本 。 这 对 明 安 图 射 

电 频 谱 日 像 仪 ， 对 任何 天 文 数据 处 理 的 项 目 ， 都 ee 

具有 很 大 的 参考 价 值 。 Fig.7 The comparison of power consumption 


T 5 结束语 


本 文 就 云 计算 技术 在 天 文 数据 处 理 方面 的 应 用 进行 了 研究 ， 介 绍 了 OpenStack 开源 云 平台 的 基本 
d 架构 和 部 署 方式 。 以 明 安 图 射电 频谱 日 像 仪 为 例 ， 提 出 了 一 套 基 于 OpenStack 的 自动 管理 模式 ， 该 模 
O 式 可 应 用 在 大 规模 的 天 文 数据 处 理 中 ， 根 据 系统 当前 计算 量 动态 分 配 计算 资源 。 与 传统 的 天 文 数据 处 
— 理 模式 相 比 ， 本 文 提出 的 自动 管理 模式 可 有 效 地 提高 计算 资源 的 利用 率 并 能 为 系统 减少 开销 ， 降 低 成 
i 本 。 同 时 ， 本 文 测试 了 基于 OpenStack 的 自动 管理 模式 在 天 文 数 据 处 理 中 的 可 行 性 ， 为 天 文 研究 提供 
= 参考 ， 具 有 现实 意义 。 下 一 步 的 工作 可 以 研究 开发 一 种 自动 化 程度 更 高 的 工具 ， 考 虑 实现 物理 节点 的 
自动 添加 与 删除 ， 为 天 文 研究 提供 更 为 快捷 、 高 效 的 数据 处 理 服 务 。 
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A Study on Automatic Management of Compute Nodes 
Based on OpenStack for Observatory 
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Abstract; Astronomical data processing is a very important part of astronomical research. With the rapid 


growth of function and observation capability of the new generation of telescopes, building a high performance 


real-time computing platform in observing sites and handling the data quickly have become a trend. Based on 


the real-time data processing system construction requirement of MUSER, this paper has systematically studied 


the implementation method based upon OpenStack local cloud and automation management pattern. We 


propose a strategy which can open or close compute nodes automatically and the experiments are carried out. 


Experiments show that this pattern can meet the needs of astronomical data processing completely and it is 


more efficient than other traditional data processing methods of static computing resources allocation. At the 


same time, it can efficiently save our energy bills and reduce the observing costs. This pattern has certain 


value for reference to build a high-performance computing platform for observatories in the future. 


Key words: Astronomical data processing; OpenStack; Automatic management 


